3D 人体生成

南洋理工大学（NTU）上个月发布了一篇Paper：《StructLDM: 结构化潜在扩散模型用于三维人体生成》。

模型演示

StructLDM 能生成多样化且视角一致的人体模型，并支持不同层级的可控生成与编辑功能。例如，通过选择五个部分进行混合，实现组合式生成；此外，还支持身份交换、局部服装编辑、三维虚拟试穿等部位感知的编辑功能。这些生成和编辑功能不依赖于特定的服装类型或遮罩条件，具有较高的适用性。

技术细节

StructLDM 是一种新的三维人体生成模型，它基于二维图像集合，与现有的三维生成对抗网络（3D GAN）相比，具有全新的设计范式。该模型包括三个关键设计：结构化的二维潜在空间、结构化的自动解码器以及结构化的潜在扩散模型。

技术对比

在UBCFashion数据集上的定性结果表明，StructLDM能够根据不同的姿势/视角以及不同的服装风格（例如连衣裙）和发型，生成多样化且视角一致的人体模型。

代码

目前代码还没有开源，可以先关注一下：https://github.com/TaoHuUMD/StructLDM